本週要做的事
| 順序 | 內容 | 預估時間 |
|---|---|---|
| 1 | 從 W3 像素值處理轉到 W4 像素位置處理(概念轉折) | 10 min |
| 2 | 01 座標系統:影像座標 vs 世界座標 + 齊次座標 | 30 min |
| 3 | 02 2D 幾何變換:Euclidean → Similarity → Affine → Projective 層級 | 40 min |
| 4 | 03 影像插值:Nearest / Bilinear / Bicubic | 30 min |
| 5 | 04 針孔相機模型:內參矩陣 K + 畸變係數 D | 30 min |
| 6 | 05 相機校準:棋盤格法找參數 + 校正畸變 | 20 min |
| 7 | 動手做(Lab1-3) | 20 min |
教材檔案
-
📂 W4_CV_Week4_Final_86slides.pptx (原始檔)
核心投影片
80 張,5 大章節。參考 Szeliski CV 2nd Ed (2022) + OpenCV 4.x。 ※ PPT 待轉 PDF 後可線上檢視 -
W4 作業說明
作業
3 個 Lab:插值比較 + 透視校正 + 相機校準。
5 大章節
01 | 座標系統
- 影像座標 vs 世界座標
- 齊次座標:為什麼平移需要齊次? 把 2D 變換變成 3×3 矩陣的乘法
02 | 2D 幾何變換
變換層級由低到高:
- Euclidean (旋轉 + 平移):保長度與角度
- Similarity (+ 縮放):保角度,長度比例變
- Affine (+ 剪切):保平行線
- Projective / Homography:只保直線(不保平行)
03 | 影像插值 (Interpolation)
變換後 pixel 落在「半整數位置」怎麼辦? 三種插值法:
- Nearest Neighbor:取最近的 pixel,快但鋸齒
- Bilinear:4 個鄰居加權平均,中等
- Bicubic:16 個鄰居 + 3 次多項式,慢但平滑
04 | 針孔相機模型
- 內參矩陣 K (3×3):焦距 f, 主點 cx/cy
- 畸變係數 D:徑向 (k1, k2, k3) + 切向 (p1, p2)
- 從 3D 世界座標投影到 2D 影像座標的數學
05 | 相機校準概念
- 用棋盤格從多角度拍 10-15 張
cv2.findChessboardCorners抓角點cv2.calibrateCamera求 K 與 Dcv2.undistort校正畸變- 校準時關掉自動對焦,否則焦距變化會破壞校準
W4 作業 | 三個 Lab
Lab 1 | 插值法演算法比較
目標:觀察不同數學插值演算法對影像放大後的品質影響。
- 選取一張小像素圖(例如圖標或文字截圖,越小越明顯)
- 分別用 Nearest Neighbor / Bilinear / Bicubic 三種方法放大 4 倍
- 三張結果並列,觀察邊緣鋸齒與模糊感
繳交:結果圖 + 用 50 字內描述觀察到的差異。
Lab 2 | 文件透視校正
目標:利用單應性矩陣 (Homography) 將傾斜拍攝的文件轉為正面俯視圖。
- 拍攝:用手機拍一張放在桌面的學生證(需有明顯傾斜角度)
- 標記:手動找出文件四個角落的座標
src_pts - 計算:定義輸出圖長寬,設定四個正面座標
dst_pts - 轉換:用
findHomography計算矩陣,透過warpPerspective產出矯正影像
繳交:1. 原始傾斜圖(含標記點) 2. 矯正後的正視圖。
Lab 3 | 相機校準與影像校正
目標:掌握相機內參矩陣 K 與畸變係數 D 的物理意義。透過棋盤格校準法,將受鏡頭畸變影響的原始影像校正為符合針孔相機模型的影像。
- 資料採集:自行列印或開啟棋盤格圖檔,從不同角度拍至少 10-15 張
- 參數計算:識別棋盤格角點,求出 K 與 D
- 即時校正:將參數套用於即時影像串流,輸出 undistorted 畫面
- 參數擾動實驗:手動修改焦距 fx、主點、畸變係數,觀察畫面變化
繳交:
- 參數文件:K (3×3) 與 D 向量的數值
- 錄製影片:展示原始 vs 校正影像對比,含「手動調整參數」的過程
- 實驗心得:描述影像串流產生的具體物理變異現象
提示:校準時請確保棋盤格涵蓋畫面邊緣,以獲得更準確的畸變參數。若相機較高級會自動對焦,請手動關閉(自動對焦會影響相機的校準參數)。
學生檢核表
- 我理解齊次座標為什麼能把平移寫成矩陣乘法
- 我能列出 Euclidean / Similarity / Affine / Projective 各保留什麼性質
- 我能說明三種插值的速度/品質取捨
- 我知道內參矩陣 K 含哪些參數
- Lab 1-3 都完成
下週預告 (W5)
影像物理三部曲最後一週 — 色彩處理:
- 光、人眼、相機(色彩恆常性、The Dress 爭議)
- 色彩表示(RGB / HSV / Lab / YCrCb)
- 像素色彩運算
- 挑戰與工具(白平衡、Tone Mapping)
W6 開始就進入 Part II,工具棧切換到 Android Studio + Chaquopy。